Hồng y Kelvin Felix sinh ngày 15 tháng 2 năm 1933 tại Roseau, Dominica.[3] Ông là một trong số chín người con của Thiếu tá Edward Mosley Felix, Trưởng phòng Cảnh sát Dominica và vợ ông, bà Melanie Cadette.[5]

Thời kì tiểu học của ông gắn liền với trường Roseau Boys và sau đó tiếp tục con đường học vấn của mình bằng việc học trung học tại Trường Trung học Phổ thông Dominica.[5] Trong những năm học phổ thông, chàng trai trẻ Felix rất nổi bật trong các môn thể thao, đặc biệt là môn cricket, bóng đá và đạt được kết quả xuất sắc trong các giải đấu dành cho thanh thiếu niên.[6] Việc tu trì của ông bắt đầu bằng việc ông học về chức linh mục tại chủng viện khu vực St. John Vianney ở Trinidad.[5]